Ông từng kết hôn ba lần. Cuộc hôn nhân đầu tiên là với Anna xứ Moskva, con gái của Đại Công tước Basil I xứ Moskva (1389-1425) và Sophia của Lithuania vào năm 1414. Bà mất vào tháng 8 năm 1417 vì bệnh dịch hạch.

Cuộc hôn nhân thứ hai được sự sắp đặt của cha ông Manuel II và Đức Giáo hoàng Martin V với Sophia xứ Montferrat vào năm 1421. Cô là con gái của Theodore II, Hầu tước xứ Montferrat và người vợ thứ hai của ông Joanna xứ Bar. Joanna là con gái của Robert I, Công tước xứ Bar và Marie Valois. Ông bà ngoại của cô là John II của Pháp và Bonne của Bohemia.

Cuộc hôn nhân thứ ba của ông được sự sắp đặt của vị Hồng y tương lai Bessarion với Maria xứ Trebizond năm 1427. Cô là con gái của Alexios IV xứ Trebizond và Theodora Kantakouzene. Bà qua đời vào mùa đông năm 1439 cũng vì bệnh dịch hạch. Cả ba lần kết hôn của ông đều không có con.